Evaluation de la réponse d'un système de question-réponse et de sa justification
نویسندگان
چکیده
RÉSUMÉ. Les systèmes de question-réponse fournissent une réponse à une question en l’extrayant d’un ensemble de documents. Avec celle-ci ils fournissent également un passage de texte permettant de la justifier. On peut alors chercher à évaluer si la réponse proposée par un système est correcte et justifiée par le passage. Pour cela, nous nous sommes fondés sur la vérification de différents critères : le premier tient compte de la proportion et du type des termes communs au passage et à la question, le second de la proximité de ces termes par rapport à la réponse, le troisième compare la réponse à considérer avec celle obtenue par le système de question-réponse FRASQUES utilisé sur le passage à juger et le dernier est une vérification du type de la réponse. Les différents critères sont ensuite combinés grâce à un classifieur utilisant les arbres de décision.
منابع مشابه
Evaluation de la Performance de la Classification d'un Système Question/Réponse
RÉSUMÉ. La plupart des systèmes question/réponse se basent sur trois axes principaux : classification et analyse de la question, recherche de document pertinents et extraction de la réponse. La performance à chaque étape affecte le résultat final. La classification de question apparaît comme une tâche importante car elle infère le type de réponse attendu. Dans cet article, nous présentons des m...
متن کاملD'une compacité positionnelle à une compacité probabiliste pour un système de Questions / Réponses
RÉSUMÉ. Dans cet article, nous présentons une discussion sur la définition d'un score de compacité pour permettre l'extraction d'une réponse dans un système de Questions/Réponses. Ce score de compacité qui peut être succinctement décrit comme une fonction liée a la densité des termes de la question dans le voisinage d'une réponse candidate, est présenté en détail. Ensuite, une discussion nous a...
متن کاملValidation du type de la réponse dans un système de questions réponses
RÉSUMÉ. Dans le cadre de la recherche de réponse à une question posée en langue naturelle dans des textes, de nombreuses questions attendent une réponse d’un certain type. Par exemple la question « Quel président succéda à Jacques Chirac ? » attend en réponse une entité du type président. La méthode présentée dans cet article vérifie que la réponse renvoyée est du bien type cherché. Pour cela e...
متن کاملUn essai de réponse à quelques questions théoriques et pratiques liées à la traduction automatique : définition d'un système prototype
متن کامل
Un système de question-réponse dans le domaine médical : le système Esculape. (A question answering system in the medical domain : the Esculape system)
HAL is a multi-disciplinary open access archive for the deposit and dissemination of scientific research documents, whether they are published or not. The documents may come from teaching and research institutions in France or abroad, or from public or private research centers. L’archive ouverte pluridisciplinaire HAL, est destinée au dépôt et à la diffusion de documents scientifiques de niveau...
متن کامل